導(dǎo)讀:像pR劫持一樣,對(duì)一些比較難以預(yù)防的黑帽陷害手法,本來(lái)不太想積極討論,因?yàn)橛泻芏鄷r(shí)候會(huì)對(duì)無(wú)辜的站長(zhǎng)造成很大的傷害。在前兩天的SEO案例中,提到了代理劫持(proxy hijack),有人問是
發(fā)表日期:2020-07-05
文章編輯:興田科技
瀏覽次數(shù):7986
標(biāo)簽:
像pR劫持一樣,對(duì)一些比較難以預(yù)防的黑帽陷害手法,本來(lái)不太想積極討論,因?yàn)橛泻芏鄷r(shí)候會(huì)對(duì)無(wú)辜的站長(zhǎng)造成很大的傷害。
在前兩天的SEO案例中,提到了代理劫持(proxy hijack),有人問是怎么回事,今天就解釋一下。像這種東西都是雙刃劍,不懷好意的人看了,又多了一個(gè)損人利己的工具。另一方面,已經(jīng)深受其害的站長(zhǎng)看了,也許對(duì)他們預(yù)防和恢復(fù)有正面意義。
代理劫持簡(jiǎn)單說就是搜索引擎收錄了通過代理服務(wù)器瀏覽的網(wǎng)頁(yè),而把原本真正的網(wǎng)頁(yè)懲罰或刪除。
國(guó)內(nèi)站長(zhǎng)對(duì)代理服務(wù)器(proxy server)肯定都很熟悉。在使用代理服務(wù)器上其他網(wǎng)站時(shí),瀏覽器顯示的URL通常是類似于:
http://www.proxysite.com/proxy/www.proxysite.com
其中proxysite.com是代理服務(wù)器域名,proxysite.com是真正要訪問的網(wǎng)站。
在瀏覽器打開這種URL當(dāng)然沒問題,但如果搜索引擎抓取了這種URL,就會(huì)對(duì)原來(lái)的網(wǎng)站形成完全復(fù)制內(nèi)容網(wǎng)頁(yè)。雖然復(fù)制內(nèi)容網(wǎng)頁(yè)在絕大部分情況下只是被忽略不計(jì),但在某些情況下,搜索引擎判斷錯(cuò)誤,會(huì)把原始的版本當(dāng)做是復(fù)制而被懲罰甚至被刪除。
一般情況下,通過代理訪問的URL不應(yīng)該被收錄。但如果有人惡意鏈接向這個(gè)代理URL,搜索引擎也會(huì)訪問和抓取。
怎么預(yù)防或恢復(fù)被代理劫持的排名呢?
最簡(jiǎn)單的,如果看到自己的網(wǎng)頁(yè)被代理劫持,查一下那個(gè)代理服務(wù)器的Ip地址,自己服務(wù)器上把那個(gè)Ip地址屏蔽掉,禁止抓取。
但有的時(shí)候,代理服務(wù)器的Ip地址會(huì)有變化,而且代理服務(wù)器又那么多,很可能屏蔽不過來(lái)。更復(fù)雜的方法是服務(wù)器端通過程序鑒別來(lái)訪問的是否是搜索引擎蜘蛛,是否是真正的搜索引擎蜘蛛。
有些情況下,搜索引擎蜘蛛通過代理URL訪問時(shí)的瀏覽器類型(User Agent),還是搜索引擎的蜘蛛。不過,有的代理服務(wù)器可能設(shè)置為隱藏原始Ip地址,隱藏User Agent,這就給判斷是否是搜索引擎蜘蛛造成很大困難。
這時(shí)網(wǎng)站程序就需要主動(dòng)驗(yàn)證來(lái)訪的是否是真的搜索引擎蜘蛛。如果程序檢驗(yàn)確實(shí)是真實(shí)的蜘蛛,就返回正常頁(yè)面。如果檢測(cè)不是蜘蛛是正常用戶,或是假冒的蜘蛛,那么返回的網(wǎng)頁(yè)都加入noindex,nofollow標(biāo)簽。這樣這些原始網(wǎng)頁(yè)通過代理訪問時(shí),都不能被搜索引擎所抓取。
Google2月份發(fā)表在黑板報(bào)及網(wǎng)站管理員博客的翻譯Matt Cutts的怎樣驗(yàn)證Google蜘蛛帖子(Matt Cutts的原貼沒發(fā)在自己的博客,而是發(fā)在英文版網(wǎng)站管理員博客),不是發(fā)著玩的,而是有很深的意義。從目前零個(gè)引用鏈接和評(píng)論看,大部分人不知道這個(gè)帖子有什么用。
按說搜索引擎對(duì)這種代理劫持應(yīng)該有辦法判斷,不然這就成了一些人可以陷害競(jìng)爭(zhēng)對(duì)手的簡(jiǎn)易方法。不過,任何算法都有漏洞,就算算法能99%的正確判斷,但是漏網(wǎng)的那一個(gè)錯(cuò)誤就可能使無(wú)辜的網(wǎng)站被刪除。
寫這篇文章是希望介紹給跟多人,讓大家能更好的預(yù)防。使用這種方法意圖陷害他人,相信大家都會(huì)十分鄙視的。
很少寫帖子時(shí)想,看懂的人越少越好。這是一篇。
上一篇:
暫無(wú)信息更多新聞
2020
關(guān)于關(guān)鍵詞優(yōu)化,首先我們要讓現(xiàn)在消費(fèi)者不太好、有需求,首先想到的就是搜索引擎,在搜索引擎輸入關(guān)鍵字,查尋相關(guān)的結(jié)果,換句話說通過搜索引擎來(lái)認(rèn)知和答疑
View details
2020
關(guān)于seo,對(duì)于很多剛開始創(chuàng)業(yè)的朋友們來(lái)說,都會(huì)選擇網(wǎng)絡(luò)的方式來(lái)營(yíng)銷,擴(kuò)大知名度和影響力,讓網(wǎng)站能夠吸引更多人加入其中,并且成為忠實(shí)的粉絲,獲得多方面的利
View details
2020
關(guān)于官網(wǎng)優(yōu)化,其實(shí)吧想要做好網(wǎng)站外部鏈接。然而SEO說簡(jiǎn)單也簡(jiǎn)單,說復(fù)雜也復(fù)雜。團(tuán)隊(duì)運(yùn)用的是否為正規(guī)的技術(shù)? 我個(gè)人曾經(jīng)用過一些非正規(guī)技術(shù),但是經(jīng)過一
View details
2020
關(guān)于網(wǎng)站優(yōu)化,大家可能都了解,創(chuàng)業(yè)的第一步就是找到客戶,那在以前創(chuàng)業(yè)的時(shí)候要想找到自己公司的目標(biāo)客戶都是使用傳統(tǒng)的銷售模式,要不就是朋友介紹這樣的
View details